Banco de Talentos - Engenheiro de Dados
Caso não tenhamos vagas em aberto ou as oportunidades disponíveis no momento não estejam alinhadas com o seu perfil ou objetivo profissional, inscreva-se em nosso Banco de Talentos para Engenheiro de Dados!
Estamos sempre à procura de profissionais talentosos para nossa equipe, e ao se inscrever em nosso Banco de Talentos, você se tornará uma das primeiras opções para futuras oportunidades. Como Engenheiro de Dados, seu papel será fundamental para projetar, desenvolver e gerenciar soluções escaláveis e de alto desempenho, colaborando com nossos arquitetos de dados e analistas para garantir que dados confiáveis estejam prontos para análise. Além disso, você terá a chance de desenvolver estratégias de gerenciamento de dados, automação de processos e otimização da infraestrutura, proporcionando um suporte contínuo por meio do monitoramento e das atualizações necessárias.
Se o seu perfil se alinha com esses desafios e deseja ser considerado para oportunidades futuras, inscreva-se em nosso Banco de Talentos e faça parte de uma rede de profissionais que buscam impacto e inovação!
Para você ficar por dentro, normalmente, buscamos profissionais com as seguintes habilidades:
- Experiência em desenvolvimento de pipelines de ELT/ETL.
- Experiência em PySpark.
- Experiência em arquitetura de dados em nuvem, em especial em Google Cloud Platform (GCP), AWS ou Microsoft Azure
- Conhecimento em Apache Spark
- Vontade de aprender e sede por conhecimento;
- Pró-atividade, atitude positiva e capacidade de trabalhar em equipe;
- Experiência em ambiente de Big Data (Cloudera, Hadoop, Spark, Kafka, Airflow, Nifi, Minio)
- Conhecimento em desenvolvimento de pipelines de ELT/ETL.
- Conhecimento em ferramentas de monitoramento (Zabbix, Grafana).
- Conhecimento de ferramentas de containerização (Docker, kubernetes e Openshift).
- Experiência em linguagem de programação Python.
- Familiaridade com práticas de processamento em Batch e Streaming;
- Superior completo em Ciência da Computação, Sistemas de Informação, TI e áreas afins.
As principais atividades no dia a dia de um Engenheiro de Dados na DataLakers são:
- Desenvolver pipelines de processamento de dados para ingestão, transformação e carga em tempo hábil e eficiente;
- Implementar e manter integração contínua, visando à automação de processos e melhoria de desempenho;
- Colaborar ativamente com o time multidisciplinar para entender as demandas de dados e entregar soluções alinhadas com as necessidades do negócio;
- Realizar análises de performance dos processos e propor otimizações para garantir a escalabilidade e confiabilidade das soluções de engenharia de dados.